© BUNDESREPUBLIK 
DEUTSCHLAND 




DEUTSCHES 
PATENTAMT 



© Offenlegungsschrift 
© DE 19616997 A1 



<2l) Aktenzeichen: 196 16 997 J 

@ Anmeldetag: 27. 4.96 

® Offenlegungstag: 30.10.97 



<5?) Int. CI. 6 : 

G 01 N 33/48 

G 01 N 21/84 
G 01 N 1/28 
G 01 N 35/00 
G 01 N 33/53 
G 06 K 9/66 
C12Q 1/00 



CO 



IXI 

Q 



@ Anmelder: 

Boehringer Mannheim GmbH, 68305 Mannheim, DE 



@ Erfinder: 

Molnar, Bela, Dr.med., Budapest, HU; Schafer, 
Rainer, Dipl.-Landw. Dr., 81241 Miinchen, DE; Albert, 
Winfried, Dipl.-Chem. Dr., 82390 Eberfing, DE 



CO 

CO 
CD 



@) Verfahren zur autornatisierten mikroskopunterstutzten Untersuchung von Gewebeproben oder 
Korperflussigkeitsproben 

(57) Verfahren zur autornatisierten, mikroskopunterstutzten 
Untersuchung von Gewebeproben oder Korperflussigkeits- 
proben mit Hiife von Neuronalen Netzen. Bei einem ersten 
Untersuchungsverfahren wird die Probe zunachst gernafe 
ihrer Art klassifiziert und darauf ein digital isiertes Bild in 
zusammenhangende Segrnente aufgeteilt, die durch ein 
oder mehrere Neuron ale Netze untersucht werden. Die 
Probe wird als pathologisch klassifiziert, wenri Zelltypen 
vorliegen, die nicht zur Art der Probe gehoren oder wenn 
struktureile Zell- bzw. Gewebeanderungen vorliegen. 
Bei einem zweiten Untersuchungsverfahren wird wiederum 
eine Segmentierung des digitalisierten Bildes vorgenommen 
und die Segrnente daraufhin untersucht, ob in ihnen ein 
Zellobjekt voriiegt. Darauf folgt eine Untersuchung, ob es 
■ sich bei dern Zellobjekt urn eine einzeine Zelle oder um einen 

CZeilkomplex handelt in einer dritten Auswertestufe wird 
festgesteilt, ob das gefundene Zellobjekt an einer der 
Bildgrenzen liegt. Wenn dies der Fall ist, wird erneut ein Bild 
aufgenommen, in dem die gefundenen Zeliobjekte vollstan- 
dig enthalten sind. SchlieSlich werden zur Auswertung die 
Segrnente, in denen Zeliobjekte detektiert wurden, mit 
hdherer Vergrdfierung aufgenommen. 
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Beschreibung 

Die vorliegende Erfindung betrifft ein Verfahren zur 
Untersuchung von Gewebeproben oder Kdrperfiiissig- 
keiten auf einem Objekttrager mit einem automatischen 
Mikroskop sowie einem Videosystem und einem Aus- 
wertecomputer mit Neuronalen Netzen. Die Einzelhei- 
ten des Verfahrens ergeben sich aus den Anspruchen 1 
und 8. 

Im Stand der Technik sind zur Untersuchung von 
Proben computerunterstutzte Bildanalysesysteme be- 
kannt, die ein Mikroskop mit einer Videokamera gekop- 
pelt an einen Computer beinhalten. Mit Hilfe einer Bild- 
verarbeitungskarte wird das von der Videokamera auf- 
genommene Bild dem Computer zugefuhrt und mit ei- 
ner Bildverarbeitungssoftware in geeigneter Weise auf 
einem Bildschirm dargestellt. Bei der im Stand der Tech- 
nik bekannten Vorgehensweise muB der Anwender das 
Mikroskop auf den zu untersuchenden Bereich einstel- 
len und fokussieren. Die Auswertung der Probe erfolgt 
anhand des auf dem Bildschirm dargestellten Bildes, wo- 
bei gegebenenfalls die Bildverarbeitungssoftware durch 
Kontrastveranderungen, Einfarbungen usw. unterstut- 
zend wirksam sein kann. 

Im Stand der Technik sind auch starker automatisier- 
te Apparaturen bekannt, wie sie beispielsweise in 
WO 91/20048 und WO 92/13308 beschrieben sind. Die 
in diesen Dokumenten offenbarten Vorrichtungen wei- 
sen ein automatisches Mikroskop mit einer Kamera und 
ein computerunterstiitztes Auswertesystem auf. Objek- 
tivwechsel, Fokussierung und Probenbewegung werden 
automatisch vorgenommen. Die Auswertung erfolgt, in- 
dem der Hintergrund durch spezielle Verfahren, wie 
z. B, Schwellenwertverfahren, von der Bildinformation 
abstrahiert wird. Innerhalb des Bildes werden Objekte 
lokalisiert und voneinander getrennt. Die lokalisierten 
Objekte (in der Regel Zellen) werden fokussiert und 
morphometrische und densitometrische Parameter be- 
stimmt. Diese Parameter werden anschlieQend durch 
regelbasierte oder multivariate statistische Verfahren 
evaluiert Eine Voraussetzung fur diese Vorgehensweise 
1st, daB dicht beieinanderliegende Zellen optisch vonein- 
ander getrennt werden konnen, da sonst eine Zellerken- 
nung aufgrund der morphometrischen und densitome- 
trischen Parameter fehlschlagt In dem Artikel "Auto- 
mated Cervical Smear Classification" (IEEE/9th Annual 
Conference of the Engineering in Medicine and Biologi- 
cal Society, Seite 1457) wird ein derartiges Verfahren 
beschrieben. In diesem Artikel wird vorgeschlagen, das 
Problem uberlappender Zellen zu losen, indem lediglich 
die Kerne angefarbt werden und die Klassifizierung auf- 
grund dieser Anf arbung vorgenommen wird. 

Weiterhin sind im Stand der Technik mathematische 
Optimierungsverfahren bekannt, die versuchen, die Bil- 
der der Objekte in einem multivariablen Raum durch 
Trennlinien/Trennflachen voneinander zu separieren. 
Ebenfalls wurden regelbasierte und statistische Verfah- 
ren entwickelt, um das Problem der Objektseparierung 
zu losen. 

Aufgabe der vorliegenden Erfindung war es, ein Ver- 
fahren zur Untersuchung von Gewebeproben oder 
Korperflussigkeitsproben bereitzustellen, das auch fur 
Proben mit dicht beieinanderliegenden Objekten eine 
gezielte Auswertung ermoglicht, ohne daB eine Fokus- 
sierung und Trennung von Objekten vorgenommen 
werden muB. 

Die vorstehend genannte Aufgabe wird durch ein 
Verfahren gemaB Anspruch 1 und Anspruch 8 gelost 
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Insbesondere hat es sich als wichtig erwiesen, bei der 
Untersuchung der Probe mit einem Neuronalen Netz 
Zellen, Zellkomplexe oder histologische Strukturen so 
abzubilden, daB sie nicht am Rand des ausgewerteten 

5 Bereiches liegen und teilweise aus dem Auswertebe- 
reich herausragen. Das erfindungsgemaBe Verfahren 
schlagt eine Vorgehensweise vor, bei dem weder der 
Eingriff eines Operateurs noch die Verwendung abge- 
leiteter GroBen, wie beispielsweise morphometrische 

io oder densitometrische GroBen, notwendig sind. Oberra- 
schend hat sich gezeigt, daB eine Untersuchung von 
Bildsegmenten mit eng beieinanderliegenden Zellen 
oder Zellkomplexen mit Neuronalen Netzen auch dann 
moglich ist, wenn keine Fokussierung auf einzelne Zel- 

15 len vorgenommen wird, wobei jedoch sichergestellt 
werden muB, daB der Bildbereich, der dem Neuronalen 
Netz zugefuhrt wird, die Zellen bzw. die Zellkomplexe 
vollstandig enthalt, so daB diese Strukturen nicht aus 
dem Auswertebereich herausragen. Dies war nicht zu 

20 erwarten, da die im Stand der Technik bekannten Ver- 
fahren darauf basieren, daB einzelne Objekte, wie Zel- 
len, Zellkomplexe oder histologische Strukturen als ein- 
zelne Objekte lokalisiert, fokussiert und identifiziert 
werden. 

25 Weiterhin hat es sich als vorteilhaft erwiesen, wenn 
eine Klassifizierung der Art der Probe erfolgt und die 
Neuronalen Netze unter Beriicksichtigung dieser Klas- 
sifizierung untersuchen, ob Zelltypen vorliegen, die 
nicht zur Art der Probe gehoren oder ob strukturelle 
30 Zell-/Gewebeveranderungen vorliegen. Bei dieser Vor- 
gehensweise hat es sich als wichtig erwiesen, das Bild 
der Probe zu digitalisieren und die erhaltenen Bildpunk- 
te in zusammenhangende Segmente auf zuteilen, von de- 
nen jedes einzeln untersucht werden kann. 
35 Die vorliegende Erfindung fallt in das Gebiet der me- 
dizinischen Bilddiagnostik, zu der Tomographie, Ultra- 
schall und Mikroskopie gehoren. Von diesen Verfahren 
ist die mikroskopische Diagnostik das wichtigste Mittel 
um bosartige Erkrankungen auszuschlieBen oder zu be- 
40 statigen. Bei gynakologischen, urologischen oder endo- 
skopischen Untersuchungen und Operationen werden 
deshalb routinemaBig Proben fur die onkologische Dia- 
gnostik in die pathologischen, cytologischen oder hama- 
tologischen Labors geschickt. Das Probenmaterial be- 
45 steht aus Zellabstrichen, Zellsuspensionen oder zell- und 
strukturbildenden Teilen, die bei Biopsien oder Gewe- 
beschnitten erhalten werden. 

Bei der heute ublichen Untersuchung entscheidet der 
Arzt zunachst auf der zellularen Ebene, ob alle Zellteile 
so vorhanden sind, diese in einem normalen Verhaltnis zu- 
einander stehen und ob der Zellnukleus eine normale 
Chromatinverteilung besitzt Weiterhin wird auf dieser 
Ebene analysiert, ob ungewohnliche Zellarten vorhan- 
den sind. Auf der Strukturebene untersucht der Arzt, ob 
55 die gefundenen Zellgruppen dem Organ entsprechen, 
dem sie entnommen wurden und ob Zellarten auftreten, 
die untypisch fur das untersuchte Gewebe sind. Weiter- 
hin wird analysiert, ob die Grenzen zwischen unter- 
schiedlichen Gewebearten normal oder gestort sind. 
so Die haufigste Ursache fur derartige Veranderungen ist 
die bosartige Umwandlung von Zellen. 

Weil die gesuchten Strukturveranderungen in den 
Proben ohne Anfarung in der Regel nicht sichtbar sind, 
werden spezielle Farbungen benutzt. Die Praparate 
werden von Hand oder mit Farbeautomaten gefarbt, 
wobei auch spezielle immunologische Marker, wie z. B. 
Tumormarker-Antikorper, eingesetzt werden konnen. 
Bei der sogenannten in-situ Hybridisierung werden spe- 
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zielle DNA-Sonden, die an den Onkogenteil der zeilula- 
ren DNA binden, eingesetzt, um Tumorgene zu finden. 

Auf der zellularen Ebene wird versucht, mit Hilfe 
multivariater statistischer Verfahren Entscheidungsre- 
geln zu formulieren, so daB die bisher vom Arzt durch- 
gefiihrte Untersuchung automatisiert werden kann. Ei- 
ne Automatisierung in diesem Bereich ist sehr wichtig, 
da die Anzahl der Untersuchung st&ndig steigt und das 
notwendige qualifizierte Laborpersonal oft fehlt Die 
Fruherkennung von krebsartigen Veranderungen wur- 
de grundsatzlich zu einer besseren Prognose der Patien- 
ten beitragen. Die automatische Bewertung von zellula- 
ren und strukturellen Zell- und Organveranderungen 
erdffnet neue Moglichkeiten bei der Fruherkennung 
vonTumoren und steigert dadurch die Heilungschancen 
erheblich. 

Bei dieser Problematik setzt die vorliegende Erfin- 
dung an und schlagt ein automatisiertes Verfahren zur 
Untersuchung von Gewebeproben oder Kdrperfliissig- 
keitsproben vor. 

Proben, die mit dem erfindungsgemaBen Verfahren 
untersucht werden konnen, sind beispielsweise Gewe- 
beschnitte, Abstriche, Zellausstriche und Korperflussig- 
keiten, wie Blut, Urin, Punktatflussigkeit und derglei- 
chen. Zur Untersuchung wird die Probe auf einen Ob- 
jekttrager gebracht, so daB eine dunne Schicht der Pro- 
be erhalten wird, die untersucht werden kann. 

Im Rahmen der Erfindung wird durch Neuronale 
Netze eine Untersuchung von Zellen, Zellkomplexen, 
histologischen Strukturen usw. vorgenommen. Diese 
Einheiten werden im Folgenden zusammenfassend als 
Zellobjekte bezeichnet Darunter sollen auch solche 
Objekte verstanden werden, die am Rand des aufge- 
nommenen Bildes liegen und nur teilweise erfaBt wer- 
den. 

Die Auswertung der Probe erfolgt mit einem automa- 
tischen Mikroskop. Im Stand der Technik bekannte Mi- 
kroskope (beispielsweise WO 91/20048) weisen Einrich- 
tungen zum Einstellen der Fokussierung sowie zur Ein- 
stellung gewunschter Bildausschnitte auf. Das gangigste 
Beispiel fur eine solche Vorrichtung zur lateralen Ver- 
schiebung der Probe besteht in einem Kreuztisch, durch 
den der Objekttrager innerhalb einer Ebene verschoben 
wird. Weiterhin kann ein Mikroskop zur Durchfuhrung 
des erfindungsgemaBen Verfahrens Einrichtungen zum 
automatischen Wechsel von Objektiven und Filtern be- 
sitzen. 

In der Bildebene des Mikroskops ist der Sensor eines 
Videosystems angeordnet Heute gangige Videokame- 
ras besitzen ein CCD-Array von 1024 x 1024 oder 512 
x 512 Pixeln. Es sind sowohl CCD- Arrays bekannt, die 
als Ausgabewert Grauwerte bereitstellen als auch sol- 
che, die Farbwerte (rot-griin-blau-Werte) liefern. 

Ein erfindungsgemaBes System zur automatischen 
Untersuchung von Proben weist weiterhin einen Aus- 
wertecomputer auf, der mit dem Videosystem und auch 
mit dem Mikroskop verbunden ist Auswertecomputer 
fur eine solche Anwendung weisen einen sogenannten 
"frame-grabber" auf, der dazu dient, die vom Videosy- 
stem bereitgestellten Signale in den Auswertecomputer 
einzulesen. 

Weiterhin besitzt der Auswertecomputer Vorrichtun- 
gen zur Steuerung des Mikroskops, um eine Fokussie- 
rung sowie eine lateraie Verschiebung der Probe relativ 
zum Objektiv des Mikroskopes zu steuern. 

Der Auswertecomputer muB zur Losung der vorlie- 
genden Problemsteilung eine hohe Rechenieistung auf- 
weisen. Insbesondere sind in dem Auswertecomputer 
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mehrere Neuronale Netze implementiert 

Neuronale Netze werden ais mathematische Modelle 
biologischer Gehirnfunktionen verwendet Durch die 
Auswahl geeigneter Netztopologien und Verarbei- 
tungsfunktionen wird versucht, komplexe Denk- und 
Entscheidungsvorgange mit Hilfe von Computern zu 
simulieren. Die wesentlichen Erkenntnisse iiber kunstli- 
che Neuronale Netze sind in dem Buch "Parallel distri- 
buted processing: Explorations in the microstructure of 
cognition" von Rummelhart and McCulloch dargelegt 
Es gibt heute uber 100 verschiedene Netzwerkmodelle 
sowie eine Vielzahl von Verknupfungscharakteristika 
und Funktionen. Die prinzipieile Funktionsweise eines 
Neuronalen Netzes ist in der Fig. 1 dargestellt Auf der 
Eingangsseite des Neuronalen Netzes befinden sich so- 
genannte Input-Neuronen, die mit "Hidden- Neuronen" 
verbunden sind. Jedes Neuron hat einen oder mehrere 
gewichtete Inputs, entweder in Form externer Signale 
oder als Output von anderen Neuronen. Es sind sowohi 
positive als auch negative Wichtungen moglich. Die 
Summe der gewichteten Inputs wird uber eine Transfer- 
funktion in den oder die Outputwerte uberfiihrt, die 
ihrerseits andere Neuronen ansteuern oder als Ausga- 
bewerte dienen. Die in Fig. 1 dargestellten Hidden-Neu- 
ronen sind mit den Output- Neuronen verbunden. 
Selbstverstandlich kann der Bereich der Hidden-Neuro- 
nen auch wesentiich komplexer aufgebaut sein und aus 
mehreren untereinander vernetzten Ebenen bestehen. 
Die Gesamtheit aller Neuronen einer bestimmten Funk- 
tionalitat wird als Layer, wie z. B. Input-Layer, bezeich- 
net Von denen im Stand der Technik bekannten Orga- 
nisationsstrukturen Neuronaler Netze seien an dieser 
Stelle nur die Typen Perceptron, Hopfieid, Kohnen und 
Grossberg-Modell erwahnt Die wichtigsten Parameter 
eines Netzes sind neben der Topologie die Neuronen- 
grundspannungen sowie die Starke der Verbindungen 
der Neuronen untereinander. Zur Einstellung der Para- 
meter wird ein representatives Trainingsset mehrmals 
durch das Netz evaluiert Nach jedem Evaluierungszy- 
klus werden die Wichtungen und die Grundspannungen 
verandert und neu eingestellt Diese Iteration wird so 
oft durchlaufen, bis die Durchschnittsfehierrate ein vor- 
gegebenes Minimum unterschreitet oder ein zuvor defi- 
niertes aufgabenbezogenes Abbruchkriterium erreicht 
wird. Das Testset wird zur Kontrolle ebenfalls iterativ 
evaluiert 

Die vorliegende Erfindung ist insbesondere dadurch 
gekennzeichnet, daB mehrere Neuronale Netze mit ver- 
schiedenen Aufgaben verwendet werden. Zur Analyse 
durch die Neuronalen Netze wird das digitalisierte Bild 
in zusammenhangende Segmente vorzugsweise glei- 
cher GroBe aufgeteilt und die erhaltenen Segmente se- 
parat voneinander durch die Netze ausgewertet 

Wichtig ist es, daB die untersuchte Probe zunachst 
gem&B ihrer Art klassiflziert wird. Dies kann entweder 
durch einen Operateur erfolgen oder das digitalisierte 
Bild der Probe wird durch ein Neuronales Netz (NN a 
untersucht 

Bei dem erfindungsgemaBen Verfahren wird zunachst 
ein Bild der Probe aufgenommen und die digitalisierten 
Signale des Bildes einzelnen Bildpunkten zugeordnet. 
Die erhaltenen Bildpunkte werden zusammenhangen- 
den Segmenten zugewiesen, deren Auswertung ge- 
trennt erfolgt Die Segmente werden durch Neuronale 
65 Netze NNpi untersucht, indem die digitalisierten Bildsi- 
gnale des Segmentes den Input-Neuronen zugefilhrt 
werden. 

Bei einem ersten Typ der Neuronalen Netze NNpi 
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untersucht das Neuronale Netz, ob in dem jeweiligen 
Segment eine Zelle, ein Zellkomplex, ein Gewebeteil 
oder Artefactstrukturen vorliegen. Alternativ oder zu- 
satzlich kann eine weitere Auswertung durch ein Neu- 
ronales Netz NNp2 vorgenommen werden, das unter- 
sucht, ob es sich bei dem Gewebe der Probe um Epithe- 
lium, Endothelium, Bindegewebe oder Muskulatur han- 
delt oder ob eine Kdrperflussigkeit vorliegt Weiterhin 
ist die Auswertung durch ein drittes Neuronales Netz 
NNp3 moglich, das untersucht, ob in dem Segment eine 
Zelle oder ein Zellkomplex vorliegt SchlieBlich kann 
noch eine Untersuchung durch ein viertes Neuronales 
Netz NNp4 vorgenommen werden, das erkennt, wenn 
ein Zellobjekt iiber den Rand des jeweiligen Segmentes 
hinausragt Ist dies der Fall, so erfolgt eine Auswertung 
des gesamten Zellobjektes. Wenn das Zellobjekt in an- 
dere Segmente hineinragt, fur die bereits ein Bild aufge- 
nommen wurde, so kann das Zellobjekt untersucht wer- 
den, indem neue Segmente so gebildet werden, daB das 
Zellobjekt vollstandig in einem dieser Segmente liegt 
Sollte das Zellobjekt jedoch aus dem mit dem Videosy- 
stem aufgenommenen Bild herausragen, so ist es not- 
wendig, ein weiteres Bild aufzunehmen, das das Zellob- 
jekt vollstandig erfaBt 

Von den bereits genannten Auswertungen kann bei 
einer Untersuchung nur eine einzelne verwendet wer- 
den, oder die Netze konnen in geeigneter Weise mitein- 
ander kombiniert werden. Vorteilhaft ist es jedoch, alle 
vier genannten Neuronalen Netze bei einer Probe zur 
Anwendung zu bringen. 

Bei einem erfindungsgemaBen Verfahren werden die 
Segmente weiterhin mit ein oder mehreren Neuronalen 
Netzen NNyi ausgewertet und als pathologisch klassifi- 
ziert, wenn Zelltypen vorliegen, die nicht zur Art der 
Probe gehoren oder wenn strukturelle Zell- bzw. Gewe- 
beveranderungen vorliegen. Zur Erkennung, ob fremde 
Zelltypen oder strukturelle Veranderungen vorliegen, 
ist es von Bedeutung, in die Auswertung die Art der 
Probe miteinzubeziehen. Insbesondere ist es vorteilhaft, 
aufgrund der Kenntnis der Art der Probe die Neurona- 
len Netze NNyi auszuwahlen. So ist es beispielsweise 
denkbar, fur die in der Praxis auftretenden Probenarten 
jeweils Satze von Neuronalen Netzen bereitzustellen, 
die fur die spezielle Probenart trainiert wurden. Ob bei 
der Auswertung der Segmente mit den Neuronalen 
Netzen NN Y i ein oder mehrere Netze verwendet wer- 
den, hangt von der Komplexitat des jeweiligen Pro- 
blems ab. 

Wurde die vorliegende Probe als pathologisch klassi- 
fiziert, so wird vorzugsweise eine weitere Untersuchung 
vorgenommen, indem eine Aufnahme des oder der be- 
treffenden Segmente, in denen Besonderheiten gefun- 
den wurden, mit einer hoheren VergroBerung aufge- 
nommen und untersucht werden. Die neue Aufnahme 
wird wiederum in Segmente unterteilt wie bereits be- 
schrieben und Neuronale Netze NNpi werden verwen- 
det, wie dies bereits bei niedriger Auflosung erfolgt ist 
SchlieBlich werden auch fur die Aufnahme mit hoherer 
VergroBerung die Neuronalen Netze NNyi zur Anwen- 
dung gebracht und wiederum untersucht, ob Zelltypen 
vorliegen, die nicht zur Art der Probe gehoren oder ob 
strukturelle Zell-/Gewebeveranderungen vorliegen. Ist 
dies der Fall, so wird die an dem mit kleinerer VergroBe- 
rung aufgenommenen Bild gestellte Diagnose verifi- 
ziert. Es kann auch vorgesehen werden, daB die Aufnah- 
me mit hoherer VergroBerung direkt auf einem Monitor 
ausgegeben wird, damit ein erfahrener Operateur eine 
visuelle Auswertung vornehmen kann. 



Neben den bereits beschriebenen Verfahren ist ein 
weiteres Verfahren zur automatisierten mikroskopi- 
schen Untersuchung Gegenstand dieser Patentanmel- 
dung, das beschreibt, wie auf effiziente Weise eine Aus- 
5 wertung durch 3 verschiedene Typen von Neuronalen 
Netzen erfolgen kann. Das bereits beschriebene Verfah- 
ren und das folgende Verfahren konnen auch miteinan- 
der kombiniert werden. 
Das geschilderte Verfahren ist anhand des FluBdia- 

io grammes in Fig. 5 iibersichtlicher dargestellt 

Bei dem zweiten erfindungsgemaBen Verfahren dient 
ein erstes Neuronales Netz dazu, die digitalisierten Si- 
gnale des Videosystems dahingehend auszuwerten, ob 
sich ein Zeileobjekt in dem Segment befindet, der dem 

15 Input-Layer des Neuronalen Netzes zugewiesen wurde. 
Dieses erste Neuronale Netz (NNa) besitzt vorzugswei- 
se einen Aufbau, bei dem jedem Output-Neuron ein 16 
x 16 Pixelbild im Input-Feld zugeordnet ist Fur eine 
CCD-Kamera mit 512 x 512 Pixeln ergibt sich daher ein 

20 32 x 32 Output-Feld. Bei dem NNa und auch den Neu- 
ronalen Netzen NNb und NNc wird jeweils ein digitali- 
sierter Bildpunkt einem Input-Neuron zugeordnet Vor- 
zugsweise weist ein erfindungsgemaBes Neuronales 
Netz pro Segment jeweils ein einzelnes Output-Neuron 

25 auf. 

Selbstverstandlich konnen auch NN mit mehreren 
Output-Neuronen pro Segment verwendet werden, 
wenn die gewiinschte Information in einfacher Weise 
aus diesen Output-Neuronen ablesbar ist Aufgabe die- 

30 ses ersten Netzes ist es, festzustellen, in welchen der 
Segmente ein Zellobjekt lokalisiert ist Fur diese Analy- 
se ist es notwendig, das verwendete Neuronale Netz 
entsprechend zu trainieren. Es hat sich insbesondere als 
vorteilhaft erwiesen, das Neuronale Netz mit Proben 

35 der gleichen Art zu trainieren, die spater durch das Netz 
analysiert werden sollen. Das Training von Neuronalen 
Netzen zur Erzielung des gewunschten Verhaltens ist 
im Stand der Technik hinlanglich bekannt und wird da- 
her an dieser Stelle nicht naher erlautert 

40 Als Ergebnis der Auswertung wird die Information 
erhalten, in welchen Segmenten Zellobjekte vorhanden 
sind. Dies wird durch die Aktivitat des oder der Output- 
Neuronen angezeigt, die jedem Segment zugeordnet 
sind. 

45 Die Segmente, in denen ein Zellobjekt detektiert wur- 
de, werden durch ein zweites Neuronales Netz (NNb) 
ausgewertet, indem die digitalisierten Signale des jewei- 
ligen Segmentes den Input-Neuronen des NNb zuge- 
fiihrt werden und jedem der Segmente vorzugsweise ein 

50 Output-Neuron zugeordnet ist, dessen Aktivitat anzeigt, 
ob im jeweiligen Segment eine einzelne Zelle oder ein 
Zellkomplex vorliegt Geeignete Neuronale Netze kon- 
nen auch fur diese Anwendung durch Training an Pro- 
ben bekannter Zusammensetzung erhalten werden. 

55 Analog dem Neuronalen Netz A ist es auch hier vorteil- 
haft, das Training an Proben gleicher Art durchzufiih- 
ren. Eine Vorgehensweise, bei der ein Segment mit dem 
Neuronalen Netz B nur dann ausgewertet wird, wenn 
zuvor mit dem Neuronalen Netz A in diesem Segment 

60 ein Zellobjekt detektiert wurde, besitzt den Vorteil, daB 
die Zahl der Segmente, die ausgewertet werden miissen, 
stark reduziert werden kann, was zu einer Einsparung 
an Rechenzeit fuhrt 
Diese Vorgehensweise ist insbesondere dann von 

65 Vorteil, wenn nur sehr wenige Zellobjekte im Bild vor- 
handen sind (rare event detection). 

Fur die VerlaBlichkeit des erfindungsgemaBen Ver- 
fahrens hat es sich weiterhin als notwendig erwiesen, zu 
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uberprtifen, ob Zellobjekte an den Bildgrenzen liegen 
Oder gar nur teilweise im Biid enthalten sind Um dies 
auszuschlieBen, wird ein drittes Neuronales Netz (NNc) 
eingesetzt mit dem die Segmente ausgewertet werden, 
die an den Bildgrenzen liegen und in denen ein Zellob- 
jekt gefunden wurde. Das Neuronaie Netz C liefert die 
Information, ob in einem bestimmten Segment ein Zel- 
lobjekt an der Bildgrenze iiegt 1st dies der Fall, so wird 
ein weiteres Bild der Probe aufgenommen, in dem die 
Zellobjekte vollstandig enthalten sind Hierzu wird 
durch den Auswertecomputer das automatische Mikro- 
skop so angesteuert, da0 Probe und Objektiv lateral 
gegeneinander verschoben werden. Dies kann beispieis- 
weise durch einen motorgetriebenen Kreuztisch reali- 
siert werden. 

Wurden die Auswertungsschritte mit den Neuronalen 
Netzen NNa, NNb und NNc vorgenommen, so werden 
die Segmente, in denen Zellobjekte detektiert wurden, 
mit hoherer VergroBerung erneut aufgenommen. Die so 
erhaltenen Bilder konnen beispielsweise visuell durch 
einen Operateur ausgewertet werden. Vorteilhaft wird 
die Auswertung dieser Aufnahmen jedoch durch ein 
weiteres Neuronales Netz (NNd) durchgefiihrt. Dieses 
Netz nimmt eine Analyse vor, ob die Probe als patholo- 
gist zu bewerten ist 

Die nachfolgenden vorteilhaften Ausgestaltungen be- 
ziehen sich auf beide genannten Verfahren zur Untersu- 
chung. 

Eine Besonderheit der erfindungsgemaBen Verfahren 
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Untersuchungsverfahrens automatisch eingelesen wer- 
den (beispielsweise mit einem Strichcodeleser) und die- 
se Information dem Auswertecomputer ubermitteit 
werden, so daB geeignete Neuronaie Netze ausgewahlt 
werden. 

Die VergroBerungen, mit denen das Mikroskop arbei- 
tet, liegen fur die Schritte mit den Neuronalen Netzen 
NNa NNb und NNc im Bereich von 30 bis 200, vorzugs- 
weise bei etwa 100. Die Aufnahme mit hoherer Vergro- 
Berung zur Analyse von Segmenten, in denen Zellobjek- 
te detektiert wurden, erfolgt mit einer VergroBerung 
von 200 bis 600, vorzugsweise etwa 400, 

Es hat sich im praktischen Einsatz als vorteilhaft her- 
ausgesteilt Neuronaie Netze NNa bzw. NNpi einzuset- 
zen, bei denen jedem Output-Neuron ein 16 x 16 Input- 
Feld zugeordnet ist 

Die Anwendung des erfindungsgemaBen Verfahrens 
wird anhand der folgenden Anwendungsbeispiele naher 
erlautert 

Hamatologische Zelltypisierung 

Bei hamatologischer Zelltypisierung stehen die fol- 
genden Aufgaben im Vordergrund: 
Erstellung eines quantitativen und eines qualitativen 
Blutbildes sowie Erkennung und Differenzierung von 
bosartigen hamatologischen Krankheiten, wie z. B. Leu- 
kamie und Lymphomen. 
Zur Durchfiihrung dieser Auswertung wird ein Blut- 



Iiegt darin, daB in keinem der Schritte eine Fokussierung 30 ausstrich oder ein Sternumpunktatausstrich nach vorge- 
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des Mikroskopes auf einzelne Zellen oder Strukturen 
erfolgt Es ist lediglich notwendig, Bilder geeigneter 
Schichten der Probe aufzunehmen. Die im Stand der 
Technik bekannten Verfahren zur automatisierten Bild- 
analytik fur die zellulare Diagnostik fuhren eine Lokaii- 
sierung von Zellen oder Zellkomglomeraten durch und 
bewerten diese beziiglich morphometrischer und densi- 
tometrischer Parameter. Daher war es liberraschend, 
daB mit den erfindungsgemaBen Verfahren die Erken- 
nung pathologischer Strukturveranderungen mit groBer 40 
Sicherheit auch ohne eine solche Fokussierung auf ein- 
zelne Objekte moglich ist 

Als besonders vorteilhaft hat es sich erwiesen, Bilder 
aus mehreren Schichten der Probe aufzunehmen, wobei 
keine Fokussierung des Videosystems auf Zellen oder 
Zellgruppen erfolgt Die Informationen aus iibereinan- 
derliegenden Segmenten der verschiedenen Schichten 
konnen kombiniert werden, um so zu einer genaueren 
Analyse zu gelangen. 

Eine Klassifizierung der Probenart wurde bereits als 
vorteilhaft beschrieben, da auf Basis dieser Information 
geeignete Neuronaie Netze ausgewahlt werden konnen. 
Vorteilhaft verfugt der Auswertecomputer daher uber 
eine Vielzahl unterschiedlicher Neuronaler Netze, die 
verschiedenen Probenarten angepaBt sind. Bei Kenntnis 
der Probenart konnen dann automatisch geeignete 
Neuronaie Netze fur die Auswerteschritte des erfin- 
dungsgemaBen Verfahrens herangezogen werden. Die 
Klassifizierung der Probe selbst kann entweder durch 
den Anwender erfolgen, der aufgrund der Herkunft die 
Klassifizierung vornimmt oder es kann ein weiteres 
Neuronales Netz eingesetzt werden, das darauf speziali- 
siert ist, verschiedene Probenarten voneinander zu un- 
terscheiden. 

Fur einen Routineeinsatz ist es bevorzugt, den Ob- 
jekttrager, auf dem sich die Probe befindet, beziiglich 
der Art der Probe zu kennzeichnen (beispielsweise mit 
einem Barcode). Die Information kann vor Beginn des 
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schriebenen Verfahren vorbereitet und gemaB dem er- 
findungsgemaBen Verfahren ausgewertet Bei dieser 
Anwendung ist es nicht unbedingt notwendig, daB die 
gewahlten Segmente eine ganze Zelle beinhalten miis- 
sen, sondern es ist eine Auswertung auch moglich, wenn 
die Segmente nur Teile der Zeile beinhalten. Da die 
Farbe bei dieser Anwendung eine wesentiiche Informa- 
tionsquelle darstellt, wird vorzugsweise die Farbinfor- 
mation der Pixel nach dem RGB-(red-green-blue) oder 
nach dem HSI(Hue-Saturation-Intensity)-System aus- 
gewertet 

Untersuchung von Urinsedimenten 

Bei der Untersuchung von Urinsedimenten wird eine 
eher qualitative Aussage gefordert Bei den groBen Zel- 
len (Zylinder) des Urinsediments steht die sichere Er- 
kennung dieser Zellen im Vordergrund, wahrend fur die 
Erythrozyten die Zahl im Vordergrund steht. 

Histologische Untersuchungen 

Die Auswertung histologischer Proben erfolgt heute 
je nach klinischer Fragestellung sehr unterschiedlich. Im 
Schnellverfahren werden z. B. Gewebeproben aus dem 
Operationsraum ausgewertet, wenn das Ergebnis fur 
den weiteren Fortgang des Eingriffs wichtig ist Eine 
zweite Art von Proben sind Biopsien. Hier wird, wenn 
bei ultraschallendoskopischen oder rontgentomogra- 
phischen Untersuchungen eine Soiidmasse im Korper 
entdeckt wird, eine Probe mit einer Biopsienadel ausge- 
stochen oder mit einer Schere ausgeschnitten. Die Aus- 
wertung einer solchen Probe dauert im allgemeinen et- 
wa 1 Woche. Die dritte Art von Proben werden in einer 
Operation entnommen aber nicht sofort ausgewertet 
Die vierte Art sind differenzialdiagnostisch schwierige 
Proben, die zu diagnostischen Centren geschickt wer- 
den. 
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Neben der direkten Auswertung von histologischen 
oder Biopsieproben kommen hier auch noch DNA-Far- 
bungen sowie immunhistochemische Farbungen in Be- 
tracht Da die Proben sehr unterschiedlich sind, ist es bei 
dieser Anwendung insbesondere wichtig, fur die jeweili- 
ge Art der Probe ein geeignetes Neuronales Netz aus- 
zuwahlen. Das Netz, das die Endauswertung vornimmt, 
unterscheidet zwischen Strukturen, die normalerweise 
in dieser Art von Gewebe vorliegen und solchen Struk- 
turen, die auf einer abnormalen Veranderung beruhen io 
oder auf Strukturen zuruckgehen, die normalerweise 
nicht in dieser Art von Probe vorhanden sind. Da die 
hier auftretenden Faligestaltungen sehr unterschiedlich 
sind, ist ein Auswertevorgang bevorzugt, bei dem das 
Neuronaie Netz Strukturen lokalisiert, die als unge- 15 
wdhnlich erkannt wurden und diese auf einem Display 
dem Operateur anzeigt, so daB eine gesonderte Bewer- 
tung erfolgt Andererseits konnen hierfiir auch differen- 
zialdiagnostische Neuronaie Netze eingesetzt werden, 
die an die moglichen Faligestaltungen angepaBt sind 20 

Immunhistochemische Untersuchungen 

Die immunhistochemischen Reaktionen dienen dazu, 
die Differenzialdiagnose zu erleichtern und zur Progno- 25 
se beizutragen. Heute existieren verschiedene immunhi- 
stochemische Auswerteverfahren. Bei Zellsuspensionen 
kann man die DurchfluBzytometrie anwenden, obwohl 
sichere Tumormarker oder Markerpattern dafur noch 
nicht verf iigbar sind. 30 

Mit Hilfe der TV-Bild-Zytometrie konnen auch die 
immunhistochemischen Reaktionen der einzelnen Zel- 
len nicht nur qualitativ sondern auch quantitativ be- 
stimmt werden. Bisher wurde die Auswertung von histo- 
logischen Proben anschlieBend manuell mit dem Mikro- 35 
skop durchgefuhrt, wobei der Zeitaufwand fur gefarbte 
und mit verschiedenen Antikorpern markierte Prapara- 
te 5 bis 30 Minuten betragt Die Starke der immunhisto- 
chemischen Reaktion wird mit *+" oder "++" oder 

+ gekennzeichnet Bei bestimmten Tumoren 40 
wird zwischen positiver nuklearer und zytoplasmati- 
scher Reaktion unterschieden. 

Ein auf Neuronalen Netzen basierendes System teilt 
das Bild des mit speziellen Antikorpern gefarbten Pra- 
parates in Bildsegmente auf und priift diese Segmente 45 
auf positive Reaktionen. Das Training des Neuronalen 
Netzes wird vorzugsweise beim Hersteller durchge- 
fuhrt, wobei fur jeden Test ein spezielles Training erfol- 
gen muB. Je nach Schwierigkeit der zu losenden Aufga- 
be konnen auch mehrere, unterschiedlich strukturierte 50 
Neuronaie Netze, z. B. fur unterschiedliche Testverfah- 
ren, zum Einsatz kommen. Wenn das Analysesystem 
uber Barcode oder manuelle Programmierung die aktu- 
elle Testanf orderung erhalt, werden automatisch der zu- 
gehorige Netzwerktyp sowie die gultigen Netzparame- 55 
ter angewahlt Die Auswertung kann sehr schneli ablau- 
fen, da das Netz fur das Bildsegment nur eine Ja/Nein 
Entscheidung tref f en muB. 

Mit Neuronalen Netzen kann eine immunhistochemi- 
sche Auswertung vorgenommen werden, nachdem die 60 
Probe mit speziellen Antikorpern gefarbt wurde. Das 
Bild der Probe wird in verschiedene Bildsegmente auf- 
geteilt und diese auf eine positive Reaktion mit den 
Antikorpern iiberpruft Bei dieser Anwendung ist es 
wichtig, fur jeden Test ein spezielles Neuronales Netz 65 
zu trainieren. Je nach Schwierigkeit der zu losenden 
Aufgabe konnen auch mehrere unterschiedlich struktu- 
rierte Neuronaie Netze fiir unterschiedliche Testverfah- 



ren zum Einsatz kommen. Insbesondere bei dieser An- 
wendung ist es vorteilhaft, dem Analysesystem uber ei- 
nen Barcode oder iiber manuelle Programmierung den 
aktuellen Test mitzuteilen, so daB ein geeignetes Neuro- 
nales Netz zur Auswertung herangezogen wird. 

In-situ-Hybridisierung 

Die in-situ-Hybridisierung dient dazu, spezielle DNA- 
Segmente zu detektieren. Bei diesem Verfahren wird 
zunachst die zellulare DNA entfaltet, danach werden 
mit einem Labellingsystem versehene DNA-Sonden zu- 
gegeben. Nach AbschluB der Reaktion wird ermittelt, 
ob und wieviele Sonden eine Zelle auf genommen hat 

Wichtigste Teilaufgaben sind die Bereitstellung der 
Marker und die Auswertung der Reaktion. Eine auto- 
matisierte Auswertung der Reaktion wird zunehmend 
interessanter, da inzwischen Gerate fiir die automati- 
sche Probenvorbereitung entwickelt wurden. Mit Hilfe 
der Neuronalen Netze kann der zweite, arbeitsintensive 
Schritte, die Bildanalyse, vereinfacht und in kurzerer 
Zeit durchgefuhrt werden. Zudem kann die Auswertung 
nicht nur qualitativ (positiv/negativ) sondern auch halb- 
quantitativ in mehreren Stuf en erfolgen. 

Beispiel fur eine Auswertung mit einem Neuronalen 
Netz A 

Fig. 2 zeigt das Bild eines zu analysierenden Objektes, 
das sich auf einem Objekttrager befindet Das Bild wird 
zur weiteren Bearbeitung in einen eiektronischen Spei- 
cher eingelesen. Bild 3 zeigt fur das gleiche Objekt auf 
der Z-Achse die optische Intensitatsverteiiung fiir das in 
der XY-Ebene befindliche Objekt Anstelle der hier ge- 
zeigten monochromatischen Intensitatsmessung wer- 
den vorteilhaft die Intensitaten der Farben Rot, Gelb 
und Blau gemessen und einer nachfolgenden Auswer- 
tung zugrundegelegt 

Die Auswertung der Intensitatsverteiiung in Fig. 3 ist 
schematisch in Fig. 4 dargestellt Das iiber der Intensi- 
tatsverteiiung eingezeichnete Raster stellt die Auftei- 
lung des Bildes in Segmente dar. Ein Neuronales Netz- 
werk wertet die einzelnen Segmente aus und pruft, ob in 
dem jeweiligen Segment eine Gewebeprobe vorhanden 
ist Bei weiteren Untersuchungen werden nur diese Bild- 
segmente berucksichtigt 

Fur das Beispiel eines parenchymalen Gewebes wird 
die Intensitatsinformation weiterhin mit einem Neuro- 
nalen Netz auf Abnormalitaten untersucht Bildsegmen- 
te, in denen solche Abnormalitaten gefunden wurden, 
werden mit Hilfe eines weiteren Neuronalen Netzes 
klassifiziert, das zwischen vaskularen Objekten, Neuro- 
nenkomplexen und unmittelbar pathologischen Veran- 
derungen differenzieren kann. 

Bei einem epi/endothelialen Organ analysiert ein 
Neuronales Netz, ob das zu anaiysierende Objekt Bin- 
degewebemuskulatur, Epithelium oder Endothelium 
enthalt Ein weiteres Neuronlaes Netz analysiert die Be- 
grenzungen von Epithelium und Bindegewebe, um inva- 
sive Prozesse zu entdecken. Noch ein weiteres Neuro- 
nales Netz kann zur Untersuchung eingesetzt werden, 
ob das Bindegewebe epi/endotheliale Zellinseln enthalt 
Ein weiteres Neuronales Netz kann in den Segmenten 
nach vaskularen oder Neuronenkomplexen suchen. 



Patentanspriiche 
I. Verfahren zur automatisierten, mikroskopischen 
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Untersuchung von Gewebeproben oder Korper- 
fliissigkeitsproben auf einem Objekttrager mit 

— einem automatischen Mikroskop, 

— einem Videosystem, 

— einem Auswertecomputer mit Neuronalen 5 
Netzen (NN) mit den Schritten 

a) Aufnahme eines Bildes der Probe mit 
dem Videosystem und Zuweisung digitali- 
sierter Signaie zu einzelnen Bildpunkten, 

b) Klassifizierung der Art der Probe 10 

c) Aufteilung der Bildpunkte in zusam- 
menhangende Segmente und Auswertung 
jedes Segmentes durch ein oder mehrere 
Neuronale Netze (NNpi), wobei die digita- 
lisierten Bildsignale des Segmentes den 15 
Input-Neuronen des NNpi zugefiihrt wer- 
den, 

d) Auswertung der Segmente mit ein oder 
mehreren Neuronalen Netzen NN T i und 
Klassifizierung der Probe ais pathoio- 20 
gisch, wenn 

— Zelltypen vorliegen, die nicht zur Art 
der Probe gehdren oder 

— wenn strukturelle Zell-/Gewebeveran- 
derungen vorliegen. 25 

2. Verfahren gemaB Anspruch 1, bei dem die Klassi- 
fizierung der Art der Probe durch ein Neuronales 
Netz NN a erfolgt 

3. Verfahren gemaB Anspruch 1, mit einem Neuro- 
nalen Netz NNpi, das untersucht, ob in dem jeweili- 30 
gen Segment eine Zelle, ein Zeilkompiex, Gewebe- 
teile oder Artef aktstrukturen vorliegen. 

4. Verfahren gemaB Anspruch 1 oder 3, mit einem 
Neuronalen Netz NN32, das untersucht, ob es sich 
bei dem Gewebe der Probe um Epithelium, Endo- 35 
thelium, Bindegewebe, Muskulatur oder um Kor- 
perfliissigkeit handelt 

5. Verfahren gemaB Anspruch 1, 3 oder 4, mit einem 
Neuronalen Netz NNg3, das untersucht, ob in dem 
Segment eine Zelle oder ein Zeilkompiex vorliegt 40 

6. Verfahren gemaB Anspruch 1, 3, 4 oder 5, mit 
einem Neuronalen Netz NNp4, das erkennt, wenn 
ein Zellobjekt ilber den Rand des jeweiligen Seg- 
mentes hinausragt und wenn dies der Fall ist, eine 
Untersuchung des gesamten Zellobjektes vorge- 45 
nommen wird 

7. Verfahren gemaB Anspruch 1, bei dem, wenn die 
Probe in Schritt d) als pathologist klassifiziert 
wurde, eine Aufnahme des oder der betreffenden 
Segmente mit einer hoheren VergroBerung erfolgt 50 
und die Schritte c) und d) erneut durchgefuhrt wer- 
den. 

8. Verfahren zur automatisierten, mikroskopischen 
Untersuchung von Gewebeproben oder Korper- 
flussigkeitsproben auf einem Objekttrager mit 55 

— einem automatischen Mikroskop, 

— einem Videosystem, 

— einem Auswertecomputer mit mindestens 
drei verschiedenen Neuronalen Netzen (NN) 
mit den Schritten 60 

a) Aufrahme eines Bildes der Probe mit 
dem Videosystem und Zuweisung digitali- 
sierter Signaie zu einzelnen Bildpunkten, 

b) Aufteilung der Bildpunkte in zusam- 
menhangen Segmente und Auswertung 65 
jedes Segmentes durch ein erstes Neuro- 
nales Netz (NNa), wobei die digitalisier- 
ten Bildsignale des Segmentes den Input- 
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Neuronen des NNa zugefiihrt werden 
und jedem Segment mindestens ein Out- 
put-Neuron zugeordnet ist, dessen Aktivi- 
tat anzeigt, ob ein Zellobjekt im jeweili- 
gen Segment vorhanden ist, 

c) Auswertung der Segmente, in denen ein 
Zellobjekt detektiert wurde durch ein 
zweites Neuronales Netz (NNb), wobei 
die digitalisierten Bildsignale der Segmen- 
te jeweils den Input-Neuronen des NNb 
zugefiihrt werden und jedem der unter- 
suchten Segmente mindestens ein Out- 
put-Neuron zugeordnet ist, dessen Aktivi- 
tat anzeigt, ob im jeweiligen Segment eine 
einzelne Zelle oder ein Zeilkompiex vor- 
liegt, 

d) Auswertung der Segmente, die an den 
Bildgrenzen liegen und in denen ein Zel- 
lobjekt gefunden wurde durch ein drittes 
Neuronales Netz (NNc), wobei die digita- 
lisierten Signaie jedes der betreffenden 
Segmente den Input-Neuronen des NNc 
zugefiihrt werden und das NNc die Infor- 
mation Iiefert, ob ein Zellobjekt an einer 
der Bildgrenzen liegt, 

e) wenn in Schritt d) Zellobjekte detek- 
tiert wurden, die an einer Bildgrenze lie- 
gen, dann Aufnahme eines neuen Bildes, 
in dem die Zellobjekte vollstandig enthal- 
ten sind und erneute Durchfuhrung der 
Schritte b) undc), 

f) Aufnahme der Segmente, in denen in 
Schritt b) Zellobjekte detektiert wurden 
mit hoherer VergroBerung. 

9. Verfahren gemaB Anspruch 8, bei dem das in 
Schritt f) aufgenommene Bild durch ein weiteres 
Neuronales Netz (NNd) ausgewertet wird und das 
NNd als Ausgabe die Information Iiefert, ob die 
Probe pathologisch ist 

10. Verfahren gemaB Anspruch 1 oder 8, bei dem 
das Videosystem Bilder der Probe in mindestens 
zwei Schichten aufnimmt, wobei keine Fokussie- 
rung des Videosystems auf Zellen oder Zellgruppen 
erfolgt 

11. Verfahren gemaB Anspruch 9, bei dem zusatz- 
lich eine Klassifizierung der Probe nach ihrer Art 
erfolgt und bei der Entscheidung, ob eine pathoio- 
gische Probe vorliegt, diese Information einbezo- 
genwird. 

12. Verfahren gemaB Anspruch 9 oder 11, bei dem 
die Probe als pathologisch erkannt wird, wenn Zel- 
len, Zeilkomplexe oder interzellulare Strukturen 
vorliegen, die bei nicht-pathoiogischen Proben der 
gieichen Art nicht vorliegen. 

13. Verfahren gemaB Anspruch 11, bei dem die 
Klassifizierung der Art der Probe durch den An- 
wender erfolgt 

14. Verfahren gemaB Anspruch 11, bei dem die 
Klassifizierung der Art der Probe durch ein weite- 
res Neuronales Netz erfolgt 

15. Verfahren gemaB Anspruch 11, bei dem auf- 
grund der Klassifizierung der Probe ein bestimmter 
Netzwerktyp mit vorgegebenen Netzwerkparame- 
tern fiir das NNd ausgewahlt wird. 

16. Verfahren gemaB Anspruch 1 bis 6 oder 1 1, bei 
dem aufgrund der Klassifizierung geeignete Neu- 
ronale Netze Nnpi bzw. NNa NNb und NNc ausge- 
wahlt werden. 
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17. Verfahren gemaB Anspruch 1 oder 8, bei dem 
als Probe Gewebeschnitte eingesetzt werden und 
diese vor Beginn des Untersuchungsverfahrens mit 
immunhistochemischen oder durch in-situ-Hybri- 
disierung angefarbt werden und eine Auswertung 5 
aufgrund der erfolgten Anf arbung erfolgt 

18. Verfahren gemaB Anspruch 7 oder 8, bei dem 
die Aufnahme des ersten Bildes in Schrift a) mit 
einer VergroBerung von 30 bis 200 erfolgt und die 
Aufnahme des zweiten Bildes in Schritt e) mit einer 10 
VergroBerung von 200 bis 600. 

19. Verfahren gemaB Anspruch 18, bei dem die Auf- 
nahme des ersten Bildes mit einer VergroBerung 
von etwa 100 und die des zweiten Bildes mit einer 
VergroBerung von etwa 400 erfolgt. 15 

20. Verfahren gemaB Anspruch 8, mit einem NNa, 
bei dem jedem Output-Neuron ein 16 x 16 Input- 
Feld zugeordnet ist 

21. Verfahren gemaB Anspruch 8, bei dem das Vi- 
deosystem eine CCD-Kamera mit 512 x 512 Ein- 20 
zelsensoren ist 

22. Verfahren gemaB Anspruch 9 oder 1 1, bei dem 
nach Bildsegmenten gesucht wird, die Zellen von 
einem Organ enthalten, die bei normalen Proben 
dieser Art nicht in der Probe vorhanden sind. 25 

23. Verfahren gemaB Anspruch 1 oder 8, dadurch 
gekennzeichnet, daB keine Fokussierung auf einzel- 
ne Zellen oder Zellkomplexe erfolgt 
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